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Notations. 


Dans tout le sujet, R désignera le corps des nombres réels et N l'ensemble des entiers naturels. De plus, n 
désignera un entier naturel strictement supérieur à 1. 


On considère un espace probabilisé (Q,A,P). Pour X est une variable aléatoire réelle définie sur Q, on 
note E(X) son espérance (lorsqu'elle existe) et V(X) sa variance (lorsqu'elle existe). 

On rappelle que, sous réserve d'existence, la covariance de deux variables aléatoires X et Y définies sur Q est 
le nombre réel noté Cov(X, Y) et défini par 


Cov(X, Y) = E((X — E(X))(Y — E(Y))) = E(XY) - E(X)E(Y). 
En conséquence, sous réserve de l'existence de V(X), V(Y) et V(X + Y): 


V(X + Y) = V(X) + V(N) + 2Cov(X, Y). 


Objectifs du problème. 


Soit X une variable aléatoire définie sur Q. On se place dans le contexte où la loi de X n'est pas complètement 
spécifiée et où cette loi dépend d'un paramètre © inconnu. Le but de l'estimation consiste à approcher la valeur 
de ce paramètre 0, ou éventuellement la valeur de son image g(0) par une fonction réelle ç. 

La première partie revient sur quelques résultats au sujet des séries entières. La deuxième partie étudie les 
familles sommables. Dans les deux dernières parties, on se place dans le cas où X est une variable aléatoire 
définie sur Q suivant une loi de Poisson de paramètre © inconnu et on développe quelques outils pour l’esti- 
mation de ce paramètre. 


I. Séries entières. 


1. Les affirmations suivantes sont-elles vraies ou fausses? On justifiera soigneusement les ré- 
ponses. 


(a) Affirmation : «soient (ux)en et (ven deux suite de nombre réels positifs, telles que la 
série de terme général v, converge et que pour tout k € IN, ux < 04. Alors la série de terme 
général u; converge également ». 


(b) Affirmation : « soient (u)ren et (vx) deux suite de nombre réels, telles que la série de 
terme général v; converge et que pour tout k € IN, ux < v4. Alors la série de terme général 
ux converge également ». 


(c) Affirmation : «soit (ux)ren une suite de nombres réels tous non nuls. On suppose que 


Uk+1 
Uk 


lim 


k— +00 


—f, 


avec { < 1. Alors la série de terme général uy converge absolument ». 


(d) Affirmation : «soit (4})ren une suite de fonctions réelles continues définies sur un même 
intervalle 1, telle que pour tout x € 1, la suite (uK(X))xen converge vers un réel U(x). La 
fonction U ainsi définie sur I est continue ». 
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2. Question de cours. Soit (ux)}ken une suite de nombres réels. On rappelle que le rayon de 
convergence de la série entière de terme général zx" est défini par 


R=sup{xeR| (lux le est majorée} € R* U {+oo!. 


(a) Soitxe KR. 
i. Montrer que si [x| < R, alors la série de terme général uyx* converge absolument. 


ii. Montrer que si [x] > R, alors la série de terme général zx" diverge. 


On considère alors la fonction S :] - R,R[— KR définie par 
+00 
S(x) = Es ue. 
k=0 


(b) Soit R’ €]0,R[. Montrer que la série de terme général uyx"* converge uniformément sur 
[-R’, R’]. Que peut-on en déduire sur la régularité de S? 


(c) Montrer que le rayon de convergence de la série de terme général (k + 1)u:1%* est égal à 
R. 


(d) Montrer que S est indéfiniment dérivable sur ] —R,R[. 
3. Soit r un entier naturel non nul. Déterminer le rayon de convergence de la série entière de 


# # 4 FA . 
terme général TE Déterminer sa somme lorsque r = 1 et lorsque r = 2. 


4 Onnote, pour toutentier N > 1, an le nombre de partitions de l’ensemble [1, N] et on convient 
que &o = 1. 


(a) Calculer «1, «2 et «3. 


(b) Montrer que pour tout entier N > 0, 


(c) Montrer que, pour tout N > 0, ax < N!. 


N 
| à s — ANX : 
(d) En déduire que la série entière de terme général ne converge pour tout x réel tel que 


Ix| < 1. On note f(x) sa somme. 


(e) Montrer que f est dérivable sur ] — 1,1[ et que pour tout x €] —1,1[, f(x) = e“ f(x). 
En déduire que pour tout x €] —1,1[, f(x) = e°-1. 


(f) En déduire que pour tout entier naturel N, 


Il. Familles sommables. 
Soit I € IN”. Les éléments de I seront notés sous la forme i = (i1,12,...,in). 
Cas des familles sommables de réels positifs. 


Soit u = (uj)ier une famille de réels positifs ou nuls indexée par I. On dit que u est sommable lorsque 
la borne supérieure suivante est finie : 


sup Ju, JCTet]fini } <+o. 
ie] 


Dans ce cas, on note 
Su sup Su, JE Pe Tu 
iel ie] 
Soit u = (u;)ier et (vi)ier deux familles de réels positifs et a, b deux réels positifs. 
5. On suppose que pourtoutiel, 
Ui < Di. 
Montrer que si v est sommable, alors u est sommable. 


6. On suppose que u et v sont sommables. Montrer que la famille au + bv définie par 
(au + bo); = au; + bo; 


est sommable et que 
Ÿ (au + bvi) = a + ui | +b 7. vi 
iel iel iel 


7. On considère (J;)xen une famille de sous-ensembles de I tels que 


E Lier 


keN 
> Pour tout k,1 € IN, distincts, I, N 1; = 0. 


Par convention, si 1; = Ü, on pose 
) ui = 0. 


ielk 
On suppose que u est sommable. 
(a) Montrer que la famille (u;);<1, est sommable pour tout k € IN. 


(b) Montrer que pour tout p € IN, 


k=0 iel} iel 
+00 
(c) Montrer que la série de terme général ) u; converge. Sa somme est notée ) ) ui. 
ielk k=0 ielk 
4 
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(d) Montrer que 


+00 
) ) ui < ) Ui. 
k=0 iely iel 


8. Réciproquement, montrer que si la famille (w;);er, est sommable pour tout k € IN et si la série 


de terme général y, u; converge, alors (u;);er est sommable et 


ielk 
+00 
) Ui < Ù Ù ui. 
iel k=0 ielk 


9. Déduire des questions précédentes le résultat suivant, appelé théorème de sommation par pa- 
quets : 
(ui)ier, est sommable pour tout k € IN et la série de terme général 5 u; converge si et seulement 
ielk 
si (;)ier est sommable. De plus, dans ce cas, 


+00 
Du=) Du 
iel k=0 ielk 


Cas des familles sommables de réels quelconques. 


Soit u = (u;);er une famille de réels indexée par I. On dit que u est sommable lorsque la famille de réels 
positifs ou nuls [u| = (luil)ier est sommable. 
Soit u = (u;)ier une famille de réels indexée par I. Pour tout i e I, on pose 


uÿ = max (ui, 0) et uj = max (-ui,0). 


Ceci définit deux familles u* = (u*)ier et u” = (u; )ier de réels positifs ou nuls. 


10. Soit u = (u;);e une famille de réels indexée par 1. Montrer que la famille y est sommable si et 
seulement si les familles u* et u” sont sommables. 


Pour (u;)ier une famille sommable de réels, on définit alors sa somme par 


Du=(Du)-(5u 


iel il iel 
11. Soient u = (ui)ier et v = (vi)ier deux familles sommables de réels. 
(a) Montrer que la famille u + v définie par 
(u +0); = ui +v; 


est sommable et 


di +0) = + + vo 


iel iel iel 


(b) Soient 4 et b deux réels. Montrer que la famille au + bv définie par 
(au + bo); = au; + bo; 


est sommable et déterminer sa somme en fonction des sommes de u et v. 


12. On considère (lK)en une famille de sous-ensembles de I tels que 


» LJ&=x 
keN 
> Pour tout k,1 € IN, distincts, I, N 1; = 0. 


Par convention, si 1; = Ü, on pose 
ÿ, Ui — 0. 
ielk 
Montrer que (u;);er, est sommable pour tout k € IN et la série de terme général > l4;| converge 


ielk 
si et seulement si (u;);er est sommable. De plus dans ce cas, vérifier que 


+00 
Du=) Du 
iel k=0 ielk 


Application : Théorème du transfert. 


13. Soit X1, X2,..., X4 des variables aléatoires réelles discrètes définies sur Q et o une application 
définie sur IR" à valeurs dans KR telle que T = @(X1,X2,...,X4) soit encore une variable 
aléatoire réelle discrète définie sur Q. Pour tout 1 € {1,...,k}, l’univers-image de X; est noté 

Xi(Q) = {x;1j€e ki}, 
où l; est une partie de IN. On pose I = 1 X...X y. 
Montrer que les deux assertions (A1) et (42) suivantes sont équivalentes : 
(A1) T admet une espérance. 


h 
(A2) La famille (ot Pis (Au — 1) est sommable. 
k=1 


iel 
De plus dans ce cas, vérifier que 


EG)= D, ol. )l (Qu = sa) 


(ii2,...,x)el k=1 


Ill. Estimateurs. 
Soit I un intervalle ouvert, non vide, inclus dans ]0, +col. 


On considère une variable aléatoire X définie sur Q suivant une loi de Poisson dépendante d'un 
paramètre réel © € I, inconnu : autrement dit, X(Q) = IN et, pour tout entier naturel k, 


k 
P([X = k]) = en 
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On cherche à approcher la valeur de ce paramètre 0, ou éventuellement la valeur de son image (0) 
par une fonction réelle g définie sur I. 


14. (a) À l’aide des résultats de la première partie, montrer que X admet des moments d’ordre 


15. 


r pour tout r entier naturel non nul (c’est-à-dire que X’ admet une espérance pour tout r 
entier naturel non nul) puis que l'espérance et la variance de X sont égales à 0. 


(b) Donner une interprétation combinatoire des moments d'ordre r de X lorsque 0 = 1. 


Soit n variables aléatoires Y1, Y2,..., Y, définies sur (Q, mutuellement indépendantes, suivant 
n 


des lois de Poisson de paramètre respectif 01,...,0,. Montrer que la variable aléatoire >. Y; 


i=1 
n 


suit la loi de Poisson de paramètre > 6;. Indication : on pourra démontrer d’abord le cas n = 2. 
ET 
Soient X1, X2,..., X, des variables aléatoires réelles définies sur Q , mutuellement indépendantes, et de 
même loi que X. Soit @ une application définie sur IR” et à valeurs dans KR telle que g(X1, X2,..., Xn) 
soit encore une variable aléatoire définie sur Q. 
> Le n-uplet (X1,X2,...,X,) est appelé un n-échantillon de la loi de X et la variable aléatoire 
Th = P(X1, X2,..., Xh) est appelée un estimateur de g(0). 
> Après une réalisation de l'expérience aléatoire associée à Q, on note x1,x2,...,x, les valeurs prises 
par X1, X2,...,X, : ce sont les observations de l'échantillon. Le réel t = @(x1,x2,...,Xn) est 
appelé une réalisation de l'estimateur T, de g(0) et est choisie comme estimation ponctuelle de la 
valeur de g(0). 
Autrement dit, estimer ponctuellement g(0), c'est décider d'accorder à g(0) la valeur expérimentale 
Don 


Les outils suivants vont nous permettre d'étudier les estimateurs et de choisir le plus pertinent : soit 
(X1, X2,...,X,) un n-échantillon de la loi de X et T, un estimateur de $(0) admettant une espérance 
E(T;), dépendant éventuellement de 0. 
> Le réel E(T;) — g(0) est appelé biais de T, et est noté bo(T;). 
> L'estimateur T, est dit sans biais lorsque bO(T;) = 0, c'est-à-dire lorsque E(T:) = g(0). 
> Si l'estimateur T, admet une variance V(T,;), dépendant éventuellement de 0, on appelle risque 
quadratique de T, le réel 


ro(Tn) = E UT = g(@))) —= bo(Tn)° + V(Th). 
En particulier si T, est sans biais, alors ro(Tn) = V(Th). 


Une suite (Ty)nenr d'estimateurs de g(0) admettant une espérance est dite asymptotiquement sans 
biais lorsque lim bo(T) = 0. 
> +00 


On commence par étudier deux estimateurs de © : la moyenne et la variance empiriques. Soit 
(Xi, X2,...,X,)unn-échantillon de la loi de X. On définit la moyenne empirique X,deX1,X2,...,Xy 
et la variance empirique S, de X:1,X2,...,X, par 


—_ | — | … 
A 3 2% et Sn=— (Xx- X,) 


16. Montrer que X, est un estimateur sans biais de 6 et que son risque quadratique est 2 
17. (a) Montrer que 
n 
nSn = >» x? - nX. 
k=1 
En déduire E(S,). 
(b) Montrer que 5, est un estimateur asymptotiquement sans biais de 0. 
(c) Montrer que S, = Sr est un estimateur sans biais de 0. Cet estimateur est appelé 
variance empirique corrigée. 
18. (a) Montrer que 


n3 = De : o) = OP. 


k=1 


(b) En déduire que nS; admet une variance donnée par la formule suivante : 
V(nSs) = nV ((X - 0)) - 2n/Cov ((X1 — 0), (Xx — 0)°) + n?V ((X, — 0)) . 


(c) Montrer que 
NE ((Xa — 0)*) = nE ((X - 0)*) + 3n(n — 1)0 
n 
Indication : on remarquera que lorsqu'on développe > Xk— Ÿ on obtient des termes 
k=1 
de la forme (X; — 0)* ou (X; — 0} (é= — 0Ÿ ou (X; — 0) (X; — 0) ou (Xi — 0ÿ (X; — 0)(Xx — 0) 
ou (Xi — 0)(X; — 8)(Xx — 0)(X — 0) avec i, j,k,1 districts deux à deux, dont on précisera 
l'espérance. 


(d) En déduire que 
= E 
nV ((K: - 0Ÿ) = 


(e) Montrer que 
n 


0) =N (X-0) +2 Ÿ. (X-6)X;- 0). 
k=1 1<i<j<n 
(f) En déduire que 
2E ((X1 — 0) (Xn — 0)) = E ((X — 0)*) + (n - 1)0?, 


puis que 


__ A\A\ __ A2 
Cov (4 - 0,0% - 67) = EUX 6») = 


pr 
(8) Déduire des questions précédentes que 
AS _ À : 4 _ n — 3 2 
È (5) D ne (@—6)) n(n — 1) 
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IV. Inégalité de Cramer-Rao. 


Le meilleur estimateur possible est un estimateur sans biais de variance minimale. Pour étudier cet 
extremum, nous allons établir l'inégalité de Cramer-Rao. 


On se place toujours dans (Q, A, P) un espace probabilisé et on considère de nouveau X une variable 
aléatoire définie sur Q suivant une loi de Poisson dépendante d'un paramètre réel O € I inconnu avec 
l'intervalle non vide ouvert inclus dans ]0, +co[. On considère les fonctions suivantes : 


IXN — KR 
‘ k 
f° (8,k) + P([X=Kkl]) = 2-0. 


ra _ R 
8°| (0,9 — Mm(f(6,h). 


On définit sous réserve d'existence l'information de Fisher de X par 


19. Montrer que pour tout 0 € I, 
puis que 


Soit @ une fonction réelle telle que @(X) soit une variable aléatoire définie sur Q, admettant une 
espérance E(p(X)) et une variance V(o(X)) pour tout 6 € I. 
L'inégalité de Cramer-Rao affirme que 


. 2 
(SE (00) 
VOD) > ro 
Nous allons démontrer cette inégalité. 
20. (a) Montrer que la fonction Ÿ : 0 5 (k)f(0, k) est définie et dérivable sur 1 et que pour 

toutO0 el, T . 

#0) = XL PU 5500. 
=Ù 


(b) En déduire que 


0 : 0g 
TDE(POO) = E (p008(0,x)). 


21. On fixe temporairement © € 1 et on considère la fonction Q5 suivante dépendant d’une 
variable réelle f : 


(a) Montrer que Qo est un polynôme de degré 2 défini sur KR. 
(b) Étudier le discriminant de Qp. 


(c) En déduire l'inégalité de Cramer-Rao. 


Nous allons généraliser cette inégalité à nos estimateurs. 
Soit (X1, X2,..., X,) un n-échantillon de la loi de X. On appelle fonction de vraisemblance pour les 
observations (k1,k2,...,k,) de l'échantillon la fonction du paramètre O € I définie de la façon suivante : 


L(8,k1,k2,...,kn) = P fl = 1) | 
j=1 


On définit, sous réserve d'existence, l'information de Fisher de l'échantillon (X1, X2,...,X3) par 


din 
F(6) = V ( _ (8, Xi, XX) | 


22. Montrer que pour tout 0 € I, 


puis que 
F(0) = nFx(0). 
Soit Ty = E(X1, X2,..., X,) un estimateur de g(0) admettant une espérance pour tout 0 € I avec ç 


dérivable sur I. On dit que T, est régulier lorsque les deux conditions suivantes sont vérifiées : 
> Pour tout 0 EI, la famille 


o£ 
(pt, .. kn) 55 k,k2,.… k) 
(i,k2,...,k)EN" 


est sommable. 
> La relation suivante est vérifiée : 


2 
2 | . DOTE) 


(k,k2,...,kn)EIN" 


OL 
= OÙ pikr...,kn)=(6,k1,k2,...,Kn). 


00 
(ki,k2,...,kn)EIN" 


23. (a) Montrer que tout estimateur T; de g(0) admettant une espérance est régulier. 


(b) En déduire que pour tout O0 € I, 


d CI on 
30 En) = E (r, (0, X, XX) = E (er, — g(@)) IE, XX... Xi) , 


24. Montrer que si 1, est un estimateur sans biais de $(0) admettant un moment d'ordre 2 pour 
tout 0 € I, alors 


g'(OY 
V(T,) > EE) 


ee Tournez la page S.V.P. 


Un estimateur sans biais de $(0) admettant un moment d'ordre 2 est dit efficace s'il atteint la borne 
de Cramer-Rao, c'est-à-dire si 
g'@Y 


V(Tn) = nEx(6) 


25. Montrer que X, est un estimateur efficace de 0. 
26. Nous allons maintenant chercher les estimateurs réguliers sans biais efficaces de 0. 


(a) Soit T, un estimateur efficace et sans biais de 0 admettant un moment d’ordre 2. Montrer 
que 1, et X, sont presque sûrement liées par une relation affine. 


(b) Montrer qu'il existe deux estimateurs de © sans biais et efficaces et admettant un moment 
d'ordre 2, dont l’un est X,. Que peut-on penser du second pour les applications pratiques ? 
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